Trương Quý phi, nguyên quán ở Vĩnh An, Hà Nam (nay là Củng Huyện, Hà Nam, Trung Quốc), xuất thân tại một gia đình trung lưu, hậu duệ của người Ngô Việt. Tằng tổ phụ Trương Văn Tiệm (张文渐), đương thời làm Đông đầu Cung phụng quan (东头供奉官). Tổ phụ Trương Dĩnh (张颖) lấy Tiến sĩ làm quan, đến Huyện lệnh, sau là Hiệu thư lang (校书郎); thân phụ là Tiến sĩ Trương Nghiêu Phong (張堯封), ngoài ra còn có hai cô con gái Trương thị vào cung hầu Tống Chân Tông. Mẹ Tào thị (曹氏), con gái Tào Giản (曹简), là Trợ giáo của Ứng Thiên phủ.

Trương Nghiêu Phong mất sớm, mẹ là Tào thị bèn đem bà cùng hai em gái đến nương nhờ người bác lớn là Viên ngoại lang Trương Nghiêu Tá (張堯佐) nhưng bị cự tuyệt. Cuối cùng, Trương thị bị bán vào làm ca nhi trong phủ của Kinh Quốc đại trưởng công chúa (荊國大長公主), con gái của Tống Thái Tông. Năm lên 8 tuổi, Trương thị cùng hai em gái được Kinh Quốc đại trưởng công chúa đưa vào cung học tập, do Chương Huệ Thái hậu chỉ bảo[1][2]. Ở trong cung, Trương thị là người xuất sắc nhất trong ba chị em, sớm học phép tắc lễ nghi, đều do Cung nhân Giả thị trực tiếp huấn luyện. Trương thị ở môi trường như vậy mà dần dần có phong thái của mỹ nhân, dung mạo khuynh nước khuynh thành. Vào một buổi yến tiệc, mỹ mạo của Trương thị được Tống Nhân Tông phát hiện, bèn say đắm sủng ái. Bà không chỉ xinh đẹp xuất chúng mà đa tài đa nghệ, năng ca thiện vũ, lại biết dùng lời nói ngon ngọt nắm được tâm tư của Tống Nhân Tông, sung vào hàng Ngự thị (御侍)[3].

Năm Khánh Lịch nguyên niên (1041), Trương thị được sách phong làm Thanh Hà quận quân (清河郡君)[4], không lâu sau lại thăng lên làm Tài nhân, rồi dần lên Tu viên, hàng Chính nhị phẩm. Tổng cộng Trương thị hoài thai sinh hạ 3 Hoàng nữ là Đặng Quốc công chúa (鄧國公主), Trấn Quốc công chúa (鎮國公主) và Đường Quốc công chúa (唐國公主) nhưng đều chết non. Về sau Tống Huy Tông truy tặng cả ba vị công chúa tôn vị Đế cơ (帝姬).